Weights & Biases(W&B)Weaveは、LLMベースのアプリケーションの追跡、実験、評価、デプロイ、改善のためのフレームワークです。柔軟性とスケーラビリティを考慮して設計されたWeaveは、LLMアプリケーション開発ワークフローのあらゆる段階をサポートします:
- トレーシングとモニタリング:LLM呼び出しとアプリケーションロジックを追跡して、本番システムのデバッグと分析を行います。
- 体系的な反復:プロンプト、データセット、モデルを改良し反復します。
- 実験:LLM Playgroundで異なるモデルやプロンプトを試します。
- 評価:カスタムまたは事前構築されたスコアラーを比較ツールと共に使用して、アプリケーションのパフォーマンスを体系的に評価し向上させます。
- ガードレール:コンテンツモデレーション、プロンプトの安全性などのための事前および事後のセーフガードでアプリケーションを保護します。
はじめに
Weaveは初めてですか?PythonクイックスタートまたはTypeScriptクイックスタートでWeaveをセットアップして使い始めましょう。高度なガイド
高度なトピックについて詳しく学びましょう:- 統合:人気のあるLLMプロバイダー、ローカルモデル、フレームワーク、およびサードパーティサービスとWeaveを使用します。
- クックブック:PythonとTypeScriptを使用してWeaveで構築します。チュートリアルはインタラクティブなノートブックとして利用できます。
- W&B AIアカデミー:高度なRAGシステムの構築、LLMプロンプトの改善、LLMの微調整などを行います。